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摘 要 采用 内 源 性 线索 -靶子 范式 , 操纵 线索 类 型 (有 效 线索 、 无 效 线索 ) 和 靶 刺 激 通 道 类 型 (视觉 刺激 、 听 觉 刺 激 、 


视听 觉 刺 激 ) 两 个 自 变 量 , 通过 两 个 实验 , 分 别 设置 50% 和 80% 两 种 内 源 性 空 


效 性 条 件 下 内 源 性 空间 注意 对 视听 觉 整 合 


效 线索 位 置 的 视听 觉 整 合 效应 没有 4 


著 差异 ; 


的 影响 , 高 线索 有 效 性 条 件 下 内 源 性 2 


的 影响 。 结 果 发 现 ， 当 线索 有 效 性 为 50% 时 (实验 D)， 有 效 线索 位 置 和 无 
当 线索 有 效 性 
著 大 于 无 效 线索 位 置 的 视听 觉 整合 效应 。 结 果 表 明 , 线索 有 效 性 不 同时 ， 内 源 性 空 
空间 注意 能 够 促进 视听 觉 整 合 效应 。 


s 间 线索 有 效 性 来 考察 不 同 空间 线索 有 


为 80% 时 (实验 2)， 有 效 线索 位 置 的 视听 觉 整合 效应 显 


间 注 意 对 视听 觉 整 合 产 生 了 不 同 
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| 前 言 

视觉 和 听觉 信息 是 人 类 感知 外 部 世界 的 两 个 
重要 来 源 。 将 视觉 和 听觉 感觉 通道 的 信息 有 效 地 融 
合 为 统一 被 称 作 视听 觉 整合 
(Audiovisual Integration; Talsma, Senkowski, Soto- 
Faraco, & Woldorff, 2010)。 视 听觉 整合 是 人 脑 系 统 
的 一 项 重要 功能 ， 能够 促进 个 体 对 目标 刺激 的 检 
测 、 识 别 和 定位 。 大 量 前 人 研究 发 现 ， 与 单一 呈现 
的 视觉 或 听觉 刺激 相 比 ,被 试 对 视听 觉 刺 激 的 反应 
更 快速 更 准确 ， 即 产生 了 人 宛 余 效应 (Redundant 
Effect; Giard & Peronnet, 1999; Lunn, Sjoblom, 
Ward, Soto-Faraco, & Forster, 2019; van den Brink 
et al., 2014)。 内 源 性 空间 注意 是 指 观察 者 根据 自己 
的 目标 或 意图 将 注意 分 配 到 特定 空间 位 置 ， 是 注意 
的 自 上 而 下 加 工 (Posner, 1980)。 内 源 性 空间 注意 在 
视听 觉 整合 的 过 程 中 起 着 至 关 重 要 的 作用 (Talsma 
& Woldorff, 2005)。 研 究 者 采用 ERP (Event-related 
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、 连 贯 的 知觉 过 天 
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potential) 和 fMRI (functional magnetic resonance 
imaging) 等 技术 手段 ， 对 内 源 性 空间 注意 如 何 调 市 
视听 觉 整 合 等 问题 进行 了 诸多 研究 。 
前 人 通常 通过 指导 语 操控 被 试 对 不 同 空间 位 
置 的 注意 (Talsma & Woldorff, 2005), 来 考察 内 源 性 
空间 注意 对 视听 觉 整 合 的 影响 ,结果 发 现 内 源 性 空 
间 注 意 对 视听 觉 整合 具有 促进 作用 。 上 有 具体 来 看 ， 
Talsma 和 Woldorff (2005) 采 用 ERP 技术 ， 要 求 被 试 
对 呈现 在 注视 点 某 一 侧 ( 如 : 左 侧 为 注意 位 置 ) 位 置 
上 的 贰 刺激 进行 反应 ,同时 忽略 呈现 在 另 一 侧 (如 : 
右 全 为 非 注意 位 置 ) 位 置 上 的 靶 刺 激 以 此 诱发 被 


试 对 不 同 空间 位 置 的 注意 ,从 而 探究 内 源 性 空间 注 
意 在 视听 觉 整合 中 的 作用 。 以 视听 觉 诱发 的 ERP 


与 单独 视觉 和 听觉 诱发 的 ERP 之 和 间 的 差异 (AV 
vs. A+V) 作 为 衡量 视听 觉 整合 效应 大 小 的 指标 。 结 
REM, AUC PA 100~140 ms 额 区 和 中 央 区 
的 电极 ,注意 位 置 上 视听 觉 整 合 效 应 要 显著 大 于 非 
注意 位 置 ， 即 内 源 性 空间 注意 增强 了 视听 觉 整 合 。 
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内 源 性 空间 注意 不 仅 能 够 被 分 配 到 某 一 个 特定 空 
间 位 置 (选择 性 空间 注意 )， 还 能 被 分 配 到 多 个 空间 
位 置 (分 配 性 空间 注意 )。Santangelo，Fagioli 和 


刺激 被 试 都 要 进行 反应 。 此 外 , 该 范式 还 可 以 调控 
线索 预测 随后 目标 位 置 的 比例 ,进而 调控 被 试 的 注 
意 分 配 。 然 而 ， 目 前 缺少 采用 内 源 性 空间 线索 诱发 


Macaluso (2010) 采 用 fMRI 技术 , 来 比较 分 配 性 空 
间 注 意 和 选择 性 空间 注意 对 视觉 和 听觉 刺激 的 加 
工效 果 。 结 果 发 现 ,与 选择 性 空间 注意 相 比 ， 分 配 
性 空间 注意 下 检测 两 种 通道 刺激 的 反应 时 比 检测 
单 通 道 刺激 的 反应 时 更 短 , 并且 在 分 配 性 空间 注意 
下 检测 两 个 通道 刺激 时 大 脑 后 项 叶 皮 层 的 激活 更 
大 。 基于 以 上 两 个 研究 及 其 他 相关 研究 可 知 内 源 性 
空间 注意 能 够 影响 视听 觉 整 合 效 应 (Busse, Roberts, 
Crist, Weissman, & Woldorff, 2005; Li, Wu, & Touge, 
2010). 

无 论 是 注意 一 个 (选择 性 空间 注意 ) 或 多 个 位 置 
(分 配 性 空间 注意 )， 研 究 者 们 多 数 通过 指导 语 来 诱 
发 被 试 产生 特定 注意 空间 定向 ， 进 而 来 探讨 内 源 性 
空间 注意 对 视听 觉 整 合 的 影响 (Busse et al., 2005; 
Fairhall & Macaluso, 2009; Li et al., 2010; Talsma & 
Woldorff, 2005)。 在 这 种 方式 下 ,注意 是 以 一 种 “全 
或 无 ”的 方式 被 操控 , 要 求 被 试 只 注意 一 个 或 者 多 
个 特定 的 空间 位 置 , 被 试 注意 的 位 置 是 固定 的 , 被 
试 仅 对 注意 位 置 的 靶 刺 激进 行 反应 ， 无 法 获得 被 试 
对 非 注意 位 置 靶 刺激 反应 的 行为 学 数据 ， 只 能 通过 
ERP 等 脑 成 像 技 术 来 探讨 内 源 性 空间 注意 对 视听 
觉 整 合 的 影响 , 但 现实 中 很 难 将 注意 以 “全 或 无 ”的 
方式 进行 分 配 。Posner (1980) 提 出 了 研究 内 源 性 空 
间 注 意 的 经 典 实 验 范式 一 内 源 性 线索 - 诅 子 范式 
(cue-target paradigm)， 即 在 目标 呈现 之 前 在 屏幕 中 
央 位 置 呈现 指示 性 的 箭头 线索 来 诱发 被 试 的 内 源 
性 空间 注意 。 目 标 出 现 位 置 和 箭头 所 指 方向 一 致 时 
为 有 效 线索 条 件 (valid cue)， 目 标 出 现 位 置 和 箭头 
所 指 方向 不 一 致 时 为 无 效 线索 条 件 (invalid cue). TE 
该 范式 中 , 人 研究 者 将 有 效 线索 和 无 效 线索 的 比例 设 
A 4:1, 结果 发 现 被 试 对 有 效 线索 位 置 目 标的 反 
应 显著 快 于 无 效 线索 位 置 ， 即 出 现 线索 化 效应 
(cueing effect). 在 这 种 条 件 下 ,被 试 的 注意 更 多 地 
被 分 配 到 有 效 线索 位 置 。 虽 然 通 过 指导 语 或 者 内 
源 性 线索 都 能 将 被 试 的 注意 定向 到 特定 空间 位 置 ， 
进而 诱发 内 源 性 空间 注意 (Fairhall & Macaluso, 
2009; van der Stigchel, Meeter, & Theeuwes, 2007), 
但 是 与 通过 指导 语 来 操控 内 源 性 空间 注意 相 比 ， 
通过 内 源 性 线索 -靶子 范式 能 够 直接 比较 注意 位 
置 和 非 注 意 位 置 被 试 对 划 刺 激 反 应 特点 的 行为 学 
指标 ， 该 范式 下 注意 位 置 和 非 注意 位 置 出 现 的 靶 


空间 定向 以 考察 内 源 性 空间 注意 对 视听 觉 整合 影 
响 的 研究 。 

在 内 源 性 线索 - 裔 子 范式 中 ,研究 者 们 发 现 高 
线索 有 效 性 和 低 线索 有 效 性 对 刺激 的 加 工会 产生 
不 同 的 影响 ， 相 比 低 线索 有 效 性 ， 高 线索 有 效 性 条 
件 下 ,被 试 需要 更 长 的 时 间 将 注意 重新 定位 到 靶 刺 
激 所 在 的 无 效 线索 位 置 (Arjona, Escudero, & Gomez, 
2016; Vossel, Thiel, & Fink, 2006). Vossel 等 人 (2006) 
基于 fMRI 技术 , 采用 内 源 性 线索 -靶子 范式 分 别 考 
察 60% 和 90% 两 种 线索 有 效 性 对 内 源 性 空间 注意 
定向 神经 机 制 的 影响 。 结 果 发 现 , 与 低 线索 有 效 性 
HE, 高 线索 有 效 性 条 件 下 ,被 试 右 侧 额 叶 和 顶 叶 
的 激活 更 大 , 线索 化 效应 也 更 大 。Arjona 等 人 (2016) 
的 研究 也 得 到 了 类 似 的 结果 ,他 们 采用 Posner 任 务 
修订 版 本 (视觉 -听觉 空间 任务 ), 设置 3 种 不 同 线索 
有 效 性 的 区 组 (50% 有 效 线索 一 50% 无 效 线索 ，68% 
有 效 线索 一 32% 无 效 线索 ，86% 有 效 线索 一 14% 无 
效 线 索 )， 基 于 行为 学 和 ERP 等 方法 来 考察 线索 有 
效 性 概率 对 目标 神经 加 工 的 影响 。 行 为 学 结果 发 现 ， 
随 着 有 效 线索 的 比例 增加 ,线索 化 效应 逐渐 变 大 。 
ERP 结 果 发 现 ， 随 着 有 效 线索 的 比例 增加 , P2a, P3b 
和 NSW 成 分 的 差异 波 振幅 逐渐 变 大 。 线 索 有 效 性 
能 够 影响 内 源 性 空间 注意 的 分 配 ， 有 效 线索 所 占 比 
例 越 大 ， 当 目标 出 现在 无 效 线索 位 置 时 , 被 试 需要 
花 更 长 的 时 间 、 更 多 的 注意 资源 去 重新 定位 。 那么 ， 
在 内 源 性 线索 -靶子 范式 中 , 不 同 线索 有 效 性 条 件 
下 ,内 源 性 空间 注意 对 视听 觉 整 合 效 应 是 否 会 产生 
不 一 样 的 影响 呢 ? 

Se EBrR, 本 研究 采用 内 源 性 线索 -靶子 范式 ， 
操纵 线索 类 型 (有 效 线 索 、 无 效 线索 ) 和 部 刺激 通道 
类 型 (视觉 刺激 、 听 觉 刺 激 、 视 听觉 刺激 ) 两 个 自 变 
E, 通过 两 个 实验 来 考察 不 同 空间 线索 有 效 性 条 件 
下 内 源 性 空间 注意 对 视听 觉 整 合 的 影响 。 实验 1 线 
索 有 效 性 设置 为 50% (线索 对 靶 刺 激 所 在 位 置 的 预 
测 性 为 50%), 实验 2 线索 有 效 性 设置 为 80% (线索 
对 骤 刺 激 所 在 位 置 的 预测 性 为 80%)。 两 个 实验 除 
了 线索 有 效 性 不 同 ,其 余 条 件 设置 均 相 同 。 基 于 前 
人 研究 结果 ,本 研究 预期 ， 不 同 空间 线索 有 效 性 条 
件 下 内 源 性 空间 注意 对 视听 觉 整合 产生 不 同 影响 ， 
且 高 线索 有 效 性 条 件 下 更 可 能 观测 到 内 源 性 空间 
注意 对 视听 觉 整 合 的 促进 作用 。 
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2 实验 1:50% 线 索 有 效 性 条 件 下 内 
源 性 空间 注意 对 视听 觉 整合 的 
影响 


21 方法 
2.1.1 被 试 

一 方面 ， 基 于 以 往 关 于 内 源 性 注意 研究 中 的 样 
本 量 (Arjona et al., 2016; Dombert, Kuhns, Mengotti, 
Fink, & Vossel, 2016; Vossel, Mathys, Stephan, & 
Friston, 2015); 另 一 方面 ， 基 于 相关 人 研究 中 报告 的 
效果 量 以 及 期 望 的 功效 值 (0.8) 计 算 的 样本 量 (计算 
软件 采用 GPower 3.1.7)。 最 终 计划 样 本 量 为 24~36 
A. 实验 1 最 终 招募 某 高 校 在 校 学 生 35 名 (男生 5 
名 , 女生 30 Z), 年龄 范围 在 18-26 岁 之 间 ，M = 
21.26 岁 , SD = 1.77 岁 。 所 有 被 试 的 听力 正常 ， 视 力 
或 矫正 视力 正常 ， 均 为 右 利 手 , 未 患 精神 疾病 , 无 
脑 部 损伤 历史 。 之 前 均 没 有 参加 过 类 似 的 实验 ,被 
试 在 实验 结束 后 获得 一 定 酬劳 。 
2.1.2 ”实验 装置 和 材料 

实验 程序 的 编写 和 刺激 的 呈现 均 采 用 E-Prime 
(版 本 1.). 。 实 验 刺 激 呈 现在 AOC G2770PF 
(270LM00009) 型 号 的 液晶 显示 器 上 , 可 视 尺 寸 27 英 
T, TPR A 1024x768 像素 , 刷新 率 为 100 Hz。 实 
验 在 黑暗 、 隔 音 的 环境 下 进行 , 屏幕 背景 为 黑色 , 亮 
度 指标 为 0.4 cd/m”。 被 试 眼睛 距离 屏幕 中 心 约 60 cmo 

实验 刺激 如 图 1(a) 所 示 。 在 注视 屏 中 , 包括 三 
个 方 框 ， 大 小 为 4?x 49， 中 央 方 框 内 呈现 加 号 所 ” 广 


视点 (长 度 : 0.05°x 0.05°)。 在 线索 屏 中 ,中 央 方 框 
内 随机 呈现 指向 左 或 右 的 箭头 作为 内 源 性 空间 线 
索 。 在 靶 刺 激 屏 中 ,视觉 靶 刺 激 为 白色 的 五 角 星 号 
(RGB: 255, 255, 255), 大 小 为 2°x 25; 听觉 靶 刺 激 
采用 SoundEngine Free 软件 制作 和 处 理 , 为 1600 HZ、 
65 dB 的 纯音 (100 ms, 10 ms 的 rise 和 fall time), 通 
过 位 于 屏幕 后 两 侧 ( 左 / 右 ) 的 扬声器 呈现 ( 离 中 央 注 
视点 : 199y; 视听 觉 靶 刺激 由 视觉 靶 刺 激 和 听觉 对 
刺激 组 合 而 成 。 
2.1.3 ”实验 设计 和 程序 

实验 采用 2( 线 索 类 型 : 50% 有效 线索 , 50% 无 效 
线索 ) x 3( 靶 刺激 通道 类 型 : 视觉 刺激 、 听 党 刺 激 和 
视听 觉 刺 激 ) 的 被 试 内 实验 设计 。 

单个 试 次 流程 如 图 1(b) 所 示 。 每 个 试 次 开始 时 
在 屏幕 中 央 随 机 呈现 一 个 600-800 ms 的 +” 注视 点， 
随后 呈现 200 ms 的 视觉 线索 刺激 ， 即 随机 指向 左 / 
右 的 中 央 箭 头 ， 经 700 ms 的 时 间 间 隔 后 , 100 ms 的 
靶 刺 激 (VA/AV) 出 现在 左 / 右 方 框 内 ， 要 求 被 试 既 
快 又 准 的 完成 定位 任务 。 实 验 任务 : BER PITAL 
刺激 的 位 置 进行 左 / 右 判 断 ， 当 靶 刺 激 出 现在 左 侧 
时 按键 盘 上 的 “F” 键 ,出 现在 右 侧 时 按 “ 键 。 实 验 
前 告知 被 试 : 线索 有 效 性 为 50%, 线索 所 指 方向 能 
预测 50% 的 目标 位 置 。 要 求 被 试 在 每 个 试 次 中 , 将 
眼睛 注视 于 屏幕 中 央 , 并 尽 可 能 准确 、 快 速 地 对 部 
刺激 做 出 反应 。 正 式 实验 包括 480 个 试 次 ， 共 分 为 
4 组 ,每 组 之 间 各 休息 10s. 正式 实验 前 , 被 试 先进 
行 12 个 练习 试 次 ,整个 实验 大 约 20 分 钟 。 


图 1 实验 刺激 示例 图 和 实验 流程 图 
TE: 图 (a) 为 靶 刺 激 呈 现 位 置 的 示意 图 ; 图 @b) 为 单个 试 次 的 流程 图 。 图 (b) 中 视觉 线索 (中 央 箭 头 ) 指 向 左 侧 ， 靶 刺激 (视听 觉 ) 呈 现在 左 


侧 ( 即 ， 有 效 线 索 位 置 ), 要 求 被 试 对 靶 刺 激进 行 既 快 又 准 的 定位 反应 。 其 中 , 靶 刺 激 (V/A/AV) 分 别 代表 视觉 (visual)、 听 觉 (auditory) 
和 视听 觉 (audiovisual) 通 道 日 标 。ISI 是 指 刺 激 间 的 时 间 间 隔 (inter-stimulus interval), ITI 是 指 试 次 间 的 时 间 间 隔 (inter-trial interval). 
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2.4.4. 数据 分 析 
为 了 比较 不 同 条 件 下 的 相对 多 感觉 反应 增强 

(relative amount of multisensory response enhancement, 
rMRE), 采用 公式 (a) 对 视听 觉 目 标 反 应 时 与 单 通道 
目标 (视觉 、 听 觉 ) 中 最 快 反应 时 的 相对 差 值 进行 计 
算 (van der Stoep, van der Stigchel, Nijboer, & 
Spence, 2017) .rMRE 值 反映 了 与 单 通道 目标 (视觉 、 

听觉 ) 中 最 短 的 反应 时 相 比 , 个体 对 多 感觉 通道 目 

标 反 应 时 的 加 速 或 减速 的 相对 量 , 代表 多 感觉 反应 


增强 效应 。 
rMRE = 


min(median(RT, ), median(RT, ))—median(RT yy ) 
min(median(RT, ), median(RT, ) 

为 了 考察 MRE 结果 是 用 统计 促进 (statistical 
facilitation) 还 是 多 感觉 整合 (multisensory integration, 
MSD 来 解释 , 采用 公式 (b) (竞争 模型 不 等 式 ，race 
model inequality)， 用 视觉 对 刺激 和 听觉 对 刺激 反 
应 时 间 的 累积 分 布 范 数 (cumulative distribution 
functions，CDFs) 来 计算 竞争 模型 (Race Model), ë 
争 模型 是 基于 单 通 道 视觉 和 单 通 道 听 觉 的 累积 
布 函 数 结合 来 计算 的 (Miller，1986; Raab, 1962; 
Ulrich, Miller, & Schroter, 2007)。 

P(RTpacentodet < t) = P(RT, <D+RT «t — (b) 

在 公式 (b) 中 , P REKREI PAX (cumulative 
distributive functions, CDF)， 即 在 给 定时 间 t 内 对 目 
标 反 应 的 概率 值 。P (RT, < 1 是 单 通道 听觉 试 次 在 
给 定时 间 t 内 的 反应 概率 值 ， 而 P (RTv < fb 是 单 通 
道 视觉 试 次 在 给 定时 间 t 内 的 反应 概率 值 , 通过 该 
公式 能 够 计算 出 苑 争 模型 的 预测 累积 概率 值 
(predicated cumulative probability, CP), BI CPrace models 
代表 预测 的 统计 促进 的 上 限 值 (Miller 1982, 1986; 


100% 9 


正确 率 

对 正确 率 进 行 2( 线 索 类 型 : 有 效 线索 、 无 效 线 
索 ) x 3( 靶 刺激 通道 类 型 视觉、 听觉 、 视 听觉 ) 的 
重复 测量 方差 分 析 。 

结果 如 表 1 所 示 : 靶 刺激 通道 类 型 主 效 应 显著 ， 
F(2, 68) = 17.41, p < 0.001, np = 0.34, 进一步 分 析 
表明 , 视听 觉 目 标 反 应 的 正确 率 (M = 99.2%) fb E 
高 于 视觉 目标 反应 的 正确 率 (M = 97.9%, p = 0.007) 
和 听觉 目标 反应 的 正确 率 (M = 97.0%, p < 0.001), 
视觉 目标 反应 的 正确 率 (M = 97.9%) 显 著 高 于 听觉 
目标 反应 的 正确 率 (M = 97.0%, p = 0.037)。 线 索 类 
型 主 效 应 不 显著 , F(1, 34) =1.50, p = 0.230。 线 索 类 
型 和 度 刺 激 通道 类 型 的 交互 作用 不 显著 , F(2, 68) = 
0.21, p = 0.754。 


2.2.1 


表 1 每 个 实验 中 不 同 条 件 下 的 反应 时 (RT/ms)、 正 确 率 
(ACC/%)(M + SD) 


通道 类 型 RT (ms) ACC(%) RT(ms) ACC (%) 
视听 觉 有 效 线索 302434 99.241.2 289442 987212 
无 效 线索 312436 99.2+1.2 333451 95.8+44.8 
听觉 ”有 效 线索 341439 97.142.8 318451 97.1+42.6 
无 效 线索 353442 96.842.7 363456 92.7 土 4.5 
视觉 ”有 效 线索 334442 98.0223 324441 97.5 土 2.3 
无 效 线索 345447 97.742.9 362446 95.444.7 


2.2.2. ”反应 时 

对 反应 时 进行 2( 线 索 类 型 : 有 效 线 索 、 无 效 线 
ZR) x 3( 丢 刺激 通道 类 型 : 视觉 、 听 觉 、 视 听觉 ) 的 
重复 测量 方差 分 析 。 

结果 如 表 1 和 图 2(a) 所 示 : 靶 刺 激 通 道 类 型 主 
效应 显著 , F(2, 68) = 55.38, p < 0.001, n; = 0.62， 进 


Ulrich et al，2007)。 然 后 将 视听 CDF 与 竞争 模型 
CDF 作 差 得 到 差异 CDF， 即 视听 CDF 与 竞争 模型 
CDF 在 RT 范围 内 (本 研究 为 0~1000 ms) 每 10 ms 
_E AY HE XS 25 & (Laurienti, Burdette, Maldjian, & 
Wallace, 2006)。 若 在 给 定 反应 时 范围 内 ， 实 际 CPay 
显著 大 于 预测 CPrace moder， 即 显著 违反 竞争 模型 ， 
代表 发 生 多 感觉 整合 效应 (Ulrich et al., 2007)。 
2.00 ”结果 与 分 析 

剔除 正确 率 低 于 90% 的 被 试 ， 最 终 无 被 试 被 易 
除 。 错误 反应 、 没 有 反应 和 反应 时 异常 (小 于 100 ms 
或 超过 1000 ms) 的 数据 不 作 分 析 。 最终 数 据 删 除 量 
占 总 数据 的 2.09%。 


步 分 析 表 明 , 视听 觉 目 标的 反应 时 (M = 307 ms) 
显著 快 于 视觉 目标 的 反应 时 (M = 339 ms, p < 0.001) 
和 听觉 目标 的 反应 时 (M = 347 ms, p < 0.001), 视觉 
目标 的 反应 时 (M = 339 ms) 和 听觉 目标 的 反应 时 
(M = 347 ms, p = 0.479) 没 有 显著 差异 。 线 索 类 型 主 
效应 显著 , F(1, 34) = 24.58, p < 0.001, n? = 0.42， 有 
效 线索 位 置 目标 的 反应 时 (M = 326 ms) 显 著 快 于 无 
效 线索 位 置 目标 的 反应 时 (M = 336 ms, p < 0.001)。 
线索 类 型 和 靶 刺 激 通道 类 型 的 交互 作用 不 显著 ， 
F(2, 68) = 0.89, p = 0.398, 

2.2.3 ”相对 多 感觉 反应 增强 (rMRE) 

对 不 同 线索 类 型 条 件 下 的 rMRE 进行 单 样 本 t 
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第 7 期 唐 晓 雨 等 : 内 源 性 空间 线索 有 效 性 对 视听 觉 整 合 的 影响 839 
MAS 国有 效 线索 DUE (240-310 ms)。 即 在 无 效 线索 位 置 和 有 效 线索 位 置 
" eer 违反 竞争 模型 的 时 间 窗 口 、 发 生 的 时 间 和 峰值 相 
“al | B 似 。 上 述 结果 表明 ,无 效 线索 位 置 上 的 视听 党 整 合 效 
| 应 和 有 效 线索 位 置 上 的 视听 觉 整合 效应 没有 差异 。 
250+ | | io 
(a) 
200 1 1 j 
听觉 视听 党 视觉 e 
" 四 刺激 通道 类 型 < 
(b) "T 
£ h 
E 10 - E 
X 0 J 
E 3 Re 100 200 300 i 00 700 800 900 1000 
Š 应 时 (ms) 
= 
有 效 线索 无 效 线索 
线索 类 型 (b) 
Al 2 实验 1 中 不 同 条 件 下 的 反应 时 和 relative MRE 
(rMRE) 


TE: 图 (a) 为 不 同 条 件 下 的 反应 时 ,反应 时 结果 为 平均 中 位 数 ; 
图 (b) 为 不 同 条 件 下 的 rMRE, *** p < 0.001 


检验 (与 0 进行 比较 ), 结果 显示 两 种 条 件 下 均 显 车 
大 于 0, ts (34) > 11.44, ps < 0.001。 代 表 与 单 通道 ( 视 
觉 或 听觉 ) 目 标 中 最 短 的 反应 时 相 比 , 个 体 对 同时 
呈现 的 双 通道 视听 觉 目 标 反 应 更 快 , 产生 宛 余 信 和 号 
效应 。 对 不 同 线索 类 型 条 件 下 的 rMRE 进行 配对 样 
本 t 检验 , 结果 如 图 2(b) 所 示 : 有 效 线索 位 置 的 
rMRE (M = 7.48%, SD = 3.87%) 与 无 效 线索 位 置 的 
rMRE (M = 7.14%, SD = 3.57%, t(34) = 0.71, p = 
0.481, d = 0.09, 95% CI = [-0.64, 1.32]) 没 有 显著 
差异 。 
2.2.4 竞争 模型 分 析 (race model) 

首先 , 在 反应 时 0~1000 ms KE, 求 出 每 10 ms 
时 间 段 上 不 同 线索 类 型 条 件 下 的 概率 值 : 视觉 
P(RTy<t), rat P (RT, < 和 视听 觉 P (RTay < t)o 
其 次 , 将 不 同 线索 类 型 的 CP ay Wik CP race modei 的 累计 
概率 差异 值 在 每 10 ms 上 进行 单 样本 t 检 验 (与 0 3t 
行 比 较 )。 结 果 如 图 3 所 示 : 有 效 线索 位 置 上 显著 
违反 竞争 模型 (显著 大 于 0) 的 时 间 窗 口 是 110 ms 
(230-340 ms), ts (34) > 2.03, ps < 0.05, 峰值 在 
280 ms, 为 8%. FORMA ZR fie E E b Fa eye ee 
的 时 间 窗 口 是 110 ms (230~340 ms), ts (34) > 2.25, 
ps < 0.011， 峰 值 在 290 ms, 为 8%。 对 所 得 p 值 进 
行 Bonferroni 校正 后 ,结果 显示 ， 有 效 线索 位 置 上 
违反 竞争 模型 的 时 间 窗 口 是 90 ms (240-320 ms), 
无 效 线索 位 置 上 违反 竞争 模型 的 时 间 窗 口 是 80 ms 


200 230 280290 340 350 
反应 时 (ms) 
C3ns E3p«005 国 p<0.01 mm p<0.001 


图 3 实验 1 中 不 同 线索 类 型 的 反应 竞争 模型 分 析 和 违 
反 竞 争 模 型 的 时 间 窗 口 

iE: 图 (a) 为 不 同 线索 类 型 的 反应 竞争 模型 分 析 ， 图 (a) 中 横 轴 表 

示 显 著 违反 竞争 模型 (实际 AV 累积 概率 (CPay) 显 著 大 于 竞争 模 

型 预测 累积 概率 (CPgace mode)) 的 时 间 窗 口 ; 图 (b) 为 不 同 线索 类 

型 下 违反 竞争 模型 的 时 间 窗 口 , 图 (b) 中 * 代 表 峰 值 ， 箭头 分 别 

代表 违反 竞争 模型 时 间 窗 口 的 起 始 时 间 、 峰 值 发 生 时 间 。 


3 实验 2: 80% 线 索 有 效 性 条 件 下 
内 源 性 空间 注意 对 视听 觉 整 合 的 


影响 


3.1 方法 
3.1.1 it 

27 名 (男生 6 名 , 女生 21 名 ) 某 高 校 在 校生 自愿 
参与 实验 ,年 龄 跨度 在 19~25 岁 之 间 , M = 22.19 岁 ， 
SD=1.75 岁 。 所 有 被 试 的 听力 正常 , 视力 或 矫正 视 
力 正常 ,4 名 被 试 为 左 利 手 ， 其 余 均 为 右 利 手 , RE 
精神 疾病 , 无 脑 部 损伤 历史 。 之 前 均 没有 参加 过 类 
似 的 实验 ,被 试 在 实验 结束 后 获得 一 定 酬 劳 。 
3.1.2 ”实验 装置 和 材料 

实验 2 的 实验 装置 和 材料 同 实验 1。 
3.1.3 ”实验 设计 和 程序 

实验 2 除 线索 有 效 性 设置 为 80%， 其 余 同 实验 
1。 采 用 2( 线 索 类 型 80% 有效 线索 ,，20% 无 效 线 
BR) x 3( 名 刺激 通道 类 型 : 视觉 刺激 、 听 觉 刺 激 和 视 
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听觉 刺激 ) 的 被 试 内 实验 设计 。 

实验 流程 与 实验 1 完全 一 致 ,实验 前 告知 被 试 : 
线索 有 效 性 为 80%, 线索 所 指 方向 能 预测 80% AY A 
标 位 置 。 正 式 实验 包括 1200 个 试 次 , 共 分 为 8 fH, 
每 组 之 间 各 休息 10 s。 正 式 实验 前 , 被 试 先进 行 30 
个 练习 试 次 ,整个 实验 大 约 45 分 钟 。 
3.14 数据 分 析 

实验 2 的 数据 分 析 过 程 同 实验 1。 
32 ”结果 与 分 析 

剔除 正确 率 低 于 90% 的 被 试 ， 最 终 无 被 试 被 易 
除 。 错 误 反 应 、 没 有 反应 和 反应 时 异常 (小 于 100 ms 
或 超过 1000 ms) 的 数据 不 作 分 析 。 最 终 数据 删除 量 
占 总 数据 的 2.96%。 
3.2.1 正确 率 

对 正确 率 进行 2( 线 索 类 型 : 有 效 线索 、 无 效 线 
索 ) x 3( 革 刺激 通道 类 型 视觉、 听觉 、 视 听觉 ) 的 
重复 测量 方差 分 析 。 

结果 如 表 1 所 示 : 靶 刺激 通道 类 型 主 效 应 显著 ， 
F(2, 52) = 7.48, p = 0.001, n2 = 0.22, 进一步 分 析 表 
HH, 视听 觉 目 标 反 应 的 正确 率 (M = 97.2%) 显 著 高 
于 听觉 目标 反应 的 正确 率 (M = 94.9%, p = 0.001), 
视听 觉 目 标 反应 的 正确 率 (M = 97.2%) 和 视觉 目标 
反应 的 正确 率 (M = 96.5%, p = 0.756) 没 有 显著 差异 ， 
视觉 目标 反应 的 正确 率 (M = 96.5%) 和 听觉 目标 反 
应 的 正确 率 (M = 94.9%, p = 0.054) 没 有 显著 差异 。 
线索 类 型 主 效应 显著 , F(1, 26) = 22.41, p < 0.001, 
n; = 0.46， 有 效 线索 位 置 目标 反应 的 正确 率 (M = 
97.8%) 显 著 高 于 无 效 线索 位 置 目 标 反 应 的 正确 率 
(M = 94.6%, p < 0.001)。 线 索 类 型 和 壮 刺 激 通 道 类 
型 的 交互 作用 显著 , F(2, 52) = 3.90, p = 0.026, ni = 
0.13。 简 单 效 应 分 析 表 明 ， 在 有 效 线索 条 件 下 ， 视 
听觉 目标 反应 的 正确 率 (M = 98.7%) 显 著 高 于 视觉 
目标 反应 的 正确 率 (M = 97.5%, p = 0.011) 和 听觉 目 
标 反 应 的 正确 率 (M = 97.1%, p = 0.007); 在 无 效 线 
REFF, 视听 觉 目标 反应 的 正确 率 (M = 95.8%) 
显著 高 于 听觉 目标 反应 的 正确 率 (M = 92.7%, p = 
0.003), 视觉 目标 反应 的 正确 率 (M = 95.4%) 显 著 高 
于 听觉 目标 反应 的 正确 率 (M = 92.7%, p = 0.031). 
3.2.2 ”反应 时 

对 反应 时 进行 2( 线 索 类 型 : 有 效 线 索 、 无 效 线 
索 ) x agit OE. 视觉、 听觉 、 视 听觉 ) 的 
重复 测量 方差 分 析 。 

结果 如 表 1 和 图 4(a) 所 示 : 靶 刺 激 通 道 类 型 主 
效应 显著 , F(2, 52) = 50.04, p < 0.001, nå = 0.66, it 


一 步 分 析 表 明 , 视听 觉 目标 的 反应 时 (M = 311 ms) 
显著 快 于 视觉 目标 的 反应 时 (M = 343 ms, p < 0.001) 
和 听觉 目标 的 反应 时 (M = 341 ms, p < 0.001), 视觉 
目标 的 反应 时 (M = 343 ms) 和 听觉 目标 的 反应 时 
(M = 341 ms, p= 1.000) 没 有 显 车 差异。 线索 类 型 主 
效应 显著 , F(1, 26) = 41.18, p < 0.001, n? = 0.61, 有 
效 线索 位 置 目标 的 反应 时 (M = 310 ms) 显 著 快 于 无 
效 线索 位 置 目标 的 反应 时 (M = 353 ms, p < 0.001)。 
线索 类 型 和 靶 刺 激 通道 类 型 的 交互 作用 不 显著 ， 
F(2, 52) = 3.03, p = 0.057。 


(a) 国有 效 线索 口 无 效 线索 
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图 4 实验 2 中 不 同 条 件 下 的 反应 时 和 relative MRE 
(rMRE) 


HE: 图 (a) 为 不 同 条 件 下 的 反应 时 ， 反 应 时 结果 为 平均 中 位 数 ; 
图 (b) 为 不 同 条 件 下 的 rMRE, *** p «0.001, * p < 0.05 


对 实验 1 和 实验 2 不 同 靶 刺激 通道 类 型 下 的 线 
索 化 效应 分 别 进 行 单 样本 上 检验 (与 0 进行 比较 )， 结 
果 如 表 2 所 示 , 均 显 著 大 于 0, ps < 0.001。 对 实验 1 
和 实验 2 不 同 靶 刺激 通道 类 型 下 的 线索 化 效应 分 别 
进行 独立 样本 t 检 验 , 结果 显示 , 80% 线 索 有 效 性 下 
每 个 靶 刺 激 通道 类 型 下 的 线索 化 效应 都 显著 大 于 
50% 线 索 有 效 性 下 的 线索 化 效应 , ps < 0.05。 

3.2.3 ”相对 多 感觉 反应 增强 (rMRE) 

对 不 同 线索 类 型 条 件 下 的 rMRE 进行 单 样 本 t 
检验 (与 0 进行 比较 ), 结果 显示 均 显 车 大 于 0, ts (26) 
> 9.31, ps < 0.001。 代表 与 单 通道 (视觉 或 听觉 ) 目 标 
中 最 短 的 反应 时 相 比 , 个 体 对 同时 呈现 的 双 通 道 视 
听觉 目标 反应 更 快 ， 产 生 宛 余 信 号 效应 。 对 不 
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R2 不 同 靶 刺激 通道 类 型 下 的 Cueing effect 结果 对 比 
95% CI 


实验 条 件 M t p 
下 限 ERR 
实验 1 Cueing effect 
A 12.23 5.97 18.49 3.97 < 0.001 
AV 9.44 5.48 13.41 4.84 < 0.001 
V 10.23 5.62 14.84 4.51 « 0.001 
Cueing effect 对 比 
A vs. AV 2:79 -1.31 6.88 1.38 0.176 
Avs. V 2.00 一 3.28 7.28 0.77 0.447 
AV vs. V 一 0.78 一 4.37 2.80 —0.45 0.659 
实验 2 Cueing effect 
A 45.04 29.77 60.30 6.06 < 0.001 
AV 43.54 29.75 57.32 6.49 < 0.001 
V 38.70 26.00 51.41 6.26 « 0.001 
Cueing effect Xt Lt 
A vs. AV 1.50 一 3.14 6.14 0.67 0.512 
Avs. V 6.33 0.21 12.46 2.13 0.043 
AV vs. V 4.83 —0.88 10.54 1.74 0.094 


TE: Cueing Effect 为 有 效 线索 位 置 的 反应 时 减 去 无 效 线索 位 置 的 反应 时 , M 为 平均 数 , 95% CI 为 95% 置 信 区 间 。 


同 线索 类 型 条 件 下 的 MRE 进行 配对 样本 t 检验 ， " 


结果 如 图 4(b) 所 示 : 有 效 线索 位 置 的 TMRE (M = 
6.95%, SD = 2.54%) 与 无 效 线索 位 置 的 rMRE (M = 
5.54%, SD = 3.09%, t(26) = 2.19, p = 0.038, d = 0.49, 
95% CI = [0.08, 2.74]) 差 异 显著 。 
3.2.4 ”竞争 模型 分 析 (race model) 

首先 , 在 反应 时 0~1000 ms 区间 , 求 出 每 10 ms 


UA 


累积 概率 差异 (%) 
2o 


时 间 段 上 不 同 线索 类 型 条 件 下 的 概率 值 ， 视 党 5 
P (RT, « t), Urt P (RTA< 虽 和 视听 觉 P (RTay < t). 
其 次 将 不 同 线索 类 型 的 CPav 减 CP race model 的 累计 -10 


概率 差异 值 在 每 10 ms 上 进行 单 样本 上 检验 (与 0 进 
行 比 较 )。 结 果 如 图 S 所 示 : 有 效 线索 位 置 上 显著 (b) me l= ——— 
违反 竞争 模型 (显著 大 于 0) 的 时 间 窗 口 是 90 ms i | 
(220-310 ms), ts (26) > 2.14, ps < 0.05， 峰 值 在 280 : r3 
ms, 为 4%。 无 效 线索 位 置 上 显著 违反 竞争 模型 的 200 220230 a 
时 间 窗 口 是 60 ms, ts (26) > 2.11, ps < 0.05, 峰值 在 
310 ms， 为 3%。 对 所 得 p 值 进 行 Bonferroni 校正 后 ， 
结果 显示 ， 有 效 线索 位 置 上 违反 竞争 模型 的 时 间 窗 图 5 实验 2 中 不 同 线索 类 型 的 反应 竞争 模型 分 析 和 违 
口 是 30 ms (240~260 ms), 无 效 线 索 位 置 校正 后 没 反 竞争 模型 的 时 间 窗 口 
有 时 间 段 显著 违反 竞争 模型 。 即 在 有 效 线索 位 置 相 TE: 图 (a) 为 不 同 线索 类 型 条 件 下 的 反应 竞争 模型 分 析 ， 图 (a) 
比 无 效 线索 位 置 违反 竞争 模型 的 时 间 窗 口 更 大 ,发 中 横 轴 表示 显著 违反 竞争 模型 (实际 AV 累积 概率 (CPav) 显 著 
、 ois 竞争 模型 预测 累积 概率 (CProce woue)) 的 时 间 窗 口 ; 图 (b) 关 
位 置 上 的 视听 党 整合 效应 大 于 无 效 线索 位 置 上 的 值 , 科 头 分 别 代表 违反 竞争 模型 时 间 窗口 的 起 始 时 间 .峰值 发 
视听 觉 整 合 效应 。 生 时 间 。 


Cons. p<0.05 Hp<001 WE p<0.001 
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4 讨论 测 到 了 整合 效应 。 这 一 结果 是 在 很 多 内 源 性 空间 注 


本 研究 采用 内 源 性 空间 线索 -靶子 范式 ， 结 合 
定位 任务 ,由 呈现 在 屏幕 中 央 的 白色 箭头 作为 内 源 
性 空间 线索 ,通过 两 个 实验 考察 不 同 空间 线索 有 效 
性 条 件 下 内 源 性 空间 注意 对 视听 觉 整合 的 影响 。 结 
果 发 现 ， 当 线索 有 效 性 为 50% 时 (实验 1)， 有 效 线索 
位 置 和 无 效 线索 位 置 的 视听 觉 整 合 效 应 没有 显著 
差异 ; 当 线索 有 效 性 为 80% 时 (实验 2)， 有 效 线索 
位 置 的 视听 觉 整 合 效 应 显著 大 于 无 效 线索 位 置 的 
视听 觉 整 合 效 应 。 表明 不 同 线索 有 效 性 条 件 下 内 源 
性 空间 注意 对 视听 觉 整 合 产 生 了 不 同 的 影响 。 

41 不 同 线索 有 效 性 下 内 源 性 空间 注意 对 视听 

觉 整 合 的 影响 

在 反应 时 结果 上 ,实验 1 和 实验 2 均 发 现 双 通 
道 目 标的 反应 时 显著 快 于 单 通道 目标 ， 即 产生 宛 余 
信和 号 效应 ， 体现 了 双 通 道 的 加 工 优势 , 与 以 往 研 究 
结果 一 致 Lunn et al., 2019; McCracken et al., 2019; 
Tang et al., 2019)。 基 于 rMRE Race Model 结果 ， 研 
究 发 现 当 线索 有 效 性 为 80% 时 ， 有 效 线索 位 置 的 
MRE 显著 大 于 无 效 线索 位 置 的 TMRE， 有 效 线索 
位 置 要 比 无 效 线索 位 置 违反 竞争 模型 的 时 间 窗 口 
EK, KEEK, M 80% 线 索 有 效 性 条 件 下 内 源 性 
空间 注意 增强 了 视听 觉 整合 效应 。 上 述 结 果 与 前 人 
操纵 不 同 空间 位 置 研究 内 源 性 空间 注意 的 神经 学 
结果 一 致 ， 内 源 性 空间 注意 对 视听 觉 整合 具有 促进 
作用 (Bertelson, Vroomen, Gelder, & Driver, 2000; 
Fairhall & Macaluso, 2009; Talsma & Woldorff, 
2005)。 前 人 研究 发 现 , 在 选择 性 空间 注意 条 件 下 ， 
与 非 注 意 位 置 的 刺激 相 比 ,在 刺激 出 现 后 280 ms 
的 中 央 区 域 (Li et al., 2010), 、 刺 激 出 现 后 100 ms 的 
额 中 区 域 (Talsma & Woldorff, 2005)， 对 注意 位 置 刺 
激 的 ERP 反应 更 大 。 但 是 前 人 关于 内 源 性 空间 注 
意 对 整合 的 研究 中 ， 对 内 源 性 注意 的 操纵 都 是 以 一 
种 “全 或 无 ”的 方式 , 无 法 在 行为 学 层面 上 考察 内 源 
性 空间 注意 对 整合 的 影响 ， 而 本 研究 通过 内 源 性 空 
间 线 索 - 诅 子 范式 在 行为 学 层面 上 证 实 了 内 源 性 空 
间 注 意 对 整合 的 促进 作用 。 综 上 所 述 ， 内 源 性 空间 
注意 对 视听 觉 整合 的 促进 作用 , 不 仅 表 现在 大 脑 的 
神经 活动 增强 方面 ， 同时 在 行为 上 也 表现 出 多 感觉 
性 能 提高 现象 , 但 是 行为 表现 和 神经 活动 是 否 相 关 ， 
需要 进一步 的 研究 进行 验证 。 

值得 注意 的 是 ， 当 线索 有 效 性 为 80% 时 , 虽然 
无 效 线索 条 件 下 出 现 刺 激 的 概率 为 20%, 但 是 也 观 


意 研 究 中 无 法 观测 到 的 。 之 前 的 研究 表明 多 感觉 刺 
激 的 强度 ， 呈 现时 间 和 空间 的 一 致 性 会 影响 多 感觉 
刺激 的 整合 过 程 (Meredith, Nemitz, & Stein, 1987; 
Meredith & Stein, 1986a, 1986b; Stein, Meredith, & 
Wallace, 1993)。 同 时 , 任务 类 型 、 可 用 的 注意 资源 
和 注意 类 型 等 因素 均 能 够 影响 整合 的 程度 
(Koelewijn, Bronkhorst, & Theeuwes, 2010; Talsma 
et al., 2010)。 已 有 研究 显示 ,视觉 和 听觉 刺激 的 同 
时 呈现 以 及 同 地 发 生 是 促进 视听 觉 整 合 的 两 个 重 
要 基本 特征 (Lewald & Guski，2003)。 在 本 研究 中 ， 
虽然 无 效 线索 条 件 下 刺激 较 少 , 但 是 视听 觉 刺 激 的 
时 空 一 致 性 促进 了 视听 觉 整 合 效 应 ， 而 且 由 于 在 非 
注意 一 侧 ， 所 以 整合 效应 小 于 注意 位 置 。 与 Talsma 
和 Woldorff (2005) 的 研究 结果 一 致 即使 在 非 注意 
位 置 , 在 中 央 区 电极 上 也 观测 到 明显 的 视听 觉 整 合 
效应 , 但 是 非 注意 位 置 的 视听 觉 整 合 效 应 发 生 较 晚 ， 
而 且 小 于 注意 位 置 。 

大 多 数 前 人 人 研究 发 现 ， 内 源 性 空间 注意 能 够 增 
强 视 听觉 整合 效应 (Fairhall & Macaluso, 2009; 
Talsma & Woldorff, 2005), 但 是 也 有 一 项 研究 与 之 
相反 (Zou, Müller, & Shi, 2012)。 导 致 结果 不 同 的 
个 原因 可 能 是 目标 位 置 的 不 确定 性 程度 (van der 
Stoep, van der Stigchel, & Nijboer, 2015), Talsma 和 
Woldorff (2005) 以 及 Fairhall 和 Macaluso (2009) 的 
研究 ， 目 标 呈 现 的 位 置 是 固定 的 ， 而 Zou 等 人 (2012) 
采用 视觉 搜索 任务 ， 目 标 位 置 的 不 确定 程度 更 大 ， 
进而 发 现 了 相反 的 调节 效应 。van der Stoep 等 人 
(2015) 采 用 外 源 性 空间 线索 -靶子 范式 ， 有 效 和 无 
效 线索 试 次 数目 相同 , 结果 发 现 外 源 性 空间 注意 减 
少 整合 效应 。 研 究 者 通过 “空间 不 确定 性 假说 ”进行 
解释 ， 即 外 源 性 线索 不 能 预测 目标 的 呈现 位 置 ， 以 
至 于 产生 更 高 的 靶 位 置 不 确定 性 ， 使 得 被 试 对 目标 
的 反应 更 多 依赖 于 线索 诱发 的 空间 定向 ， 视 听觉 目 
标本 身 引 起 的 空间 定向 重要 性 则 会 降低 。 在 有 效 线 
索 位 置 ， 外 源 性 线索 与 视听 觉 目标 本 身 引 起 的 空间 
定向 信息 是 宛 余 的 , 因此 降低 了 有 效 位 置 上 视听 觉 
目标 整合 的 重要 性 ,进而 导致 外 源 性 注意 减弱 视听 
觉 整 合 。 综 上 , 本 研究 认为 内 源 性 空间 注意 对 整合 
的 调节 可 能 主要 通过 调控 位 置 的 不 确定 性 来 实现 
的 。 有 研究 表明 , 线索 对 目标 位 置 的 预测 性 越 大越 
容易 吸引 注意 , 大 脑 中 的 右 侧 杜 顶 交界 处 参与 加 工 
空间 注意 任务 中 的 线索 预测 性 (Dombert et al., 2016; 
Kuhns, Dombert, Mengotti, Fink, & Vossel, 2017; 
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Vossel et al., 2015)。 在 实验 2 P, 线索 对 目标 出 现 
位 置 的 预测 性 为 80%， 高 于 50% 的 随机 概率 ， 目 标 
位 置 的 空间 确定 性 程度 较 高 ， 对 空间 定向 的 需求 较 
少 , 而 且 由 于 内 源 性 注意 是 一 种 目标 驱动 的 注意 ， 
受 自 上 而 下 认 知 资源 的 调控 ， 所 以 被 试 将 更 多 的 注 
意 资源 分 配 到 有 效 线索 位 置 ， 有 效 线索 位 置 视听 觉 
整合 的 重要 性 得 到 提高 ， 进 而 导致 内 源 性 注意 对 整 
合 的 促进 作用 。 

然而 , 在 实验 1 中 ， 当 线索 有 效 性 同 van der 
Stoep 等 人 (2015) 研 究 外 源 性 注意 相同 时 ， 却 没有 
发 现 相同 的 结果 。 有 效 性 同 为 50% 时 ,内 外 源 线索 
均 没有 预测 作用 ,然而 却 出 现 了 不 同 的 结果 。 导 致 
研究 结果 不 同 的 原因 很 可 能 是 由 内 外 源 注意 本 里 
之 间 的 差异 所 导致 的 。 内 源 性 空间 注意 不 同 于 外 源 
性 空间 注意 ， 受 大 脑 认 知 负荷 影响 较 大 ， 占 用 更 多 
的 认 知 资源 (Chica & Lupiafiez, 2009)。 在 实验 1 中 ， 
虽然 线索 对 目标 呈现 位 置 没有 预测 作用 , 但 是 仍然 
有 指向 作用 ,引导 的 是 自 上 而 下 的 控制 加 工 ， 能够 
占用 大 脑 的 认 知 资源 ; 而 van der Stoep 等 人 (2015) 
的 研究 中 ,线索 对 目标 呈现 位 置 没 有 预测 作用 , 也 
不 具有 指向 作用 ,引导 的 是 自 下 而 上 的 自动 化 加 工 ， 
不 占用 大 脑 的 认 知 资源 。 此 外 ,前 人 研究 发 现 , 在 
内 源 性 注意 条 件 下 ， 左 半球 额 叶 的 激活 要 显著 大 于 
顶 叶 的 激活 ， 内 源 性 注意 受 额 叶 脑 区 控制 ; 而 在 外 
源 性 注意 条 件 下 ， 左 半球 顶 叶 的 激活 要 显著 大 于 额 
叶 的 激活 ,外 源 性 注意 受 顶 叶 脑 区 控制 (Baluch & 
Itti, 2011; Buschman & Miller, 2007; Meyer, Du, 
Parks, & Hopfinger, 2018)。 综 合 来 看 ， 内 外 源 性 空 
间 注 意 对 视听 觉 整 合 的 调节 可 能 会 因为 内 外 源 空 
间 注 意 机 制 的 不 同 而 不 一 样 。 
4.2 ”不同 线索 有 效 性 及 靶 刺 激 通道 下 的 线索 化 

效应 

本 研究 发 现 50% 线 索 有 效 性 (实验 1) 和 80% 线 
索 有 效 性 (实验 2) 在 不 同 靶 刺激 通道 类 型 上 均 产 生 


效应 随 着 线索 有 效 性 的 增 大 而 增 大 (Eimer，1997; 
Jonides, 1983; Posner, 1980; Riggio & Kirsner, 1997; 
Vossel et al., 2014). SARA ARLEN 50% 时 , 线索 
只 有 指向 作用 ， 当 有 效 性 为 80% 时 ,线索 既 具 有 指 
向 作用 还 有 预测 作用 ， 导 致 被 试 对 线索 的 利用 率 更 
高 。 前 人 研究 发 现 ,线索 有 效 性 越 大 ， 导 致 被 试 对 
有 效 位 置 的 预期 更 大 , 分 配 到 此 位 置 的 注意 资源 更 
多 (Mengotti, Boers, Dombert, Fink, & Vossel, 2018). 
线索 有 效 性 能 够 影响 内 源 性 空间 注意 的 分 配 ， 有 效 
线索 所 占 比例 越 大 ， 当 目标 出 现在 无 效 线索 位 置 时 ， 
被 试 需要 花 更 长 的 时 间 、 更 多 的 注意 资源 去 重新 定 
位 (Arjona et al., 2016)。 个 体 对 目标 位 置 的 预期 能 够 
有 效 地 引导 注意 的 分 配 (Carrasco, 2014; Peelen & 
Kastner, 2014; Posner, 1980)。 

另外 ,基于 本 研究 的 行为 学 结果 , 在 不 同 靶 刺 
激 通道 类 型 上 均 产 生 了 显著 的 线索 化 效应 , 但 是 在 
不 同 线索 有 效 性 条 件 下 视听 觉 目标 的 线索 化 效应 
与 单 通道 目标 并 没有 显著 差异 ， 即 使 在 实验 2 中 发 
现 了 内 源 性 空间 注意 对 整合 的 促进 效应 。 对 于 此 结 
JE, 可 能 有 两 点 原因 ， 其 一 可 能 是 因为 视听 觉 整合 
对 内 源 性 线索 化 效应 没有 调节 作用 。 内 源 性 线索 化 
效应 通过 线索 化 效应 量 的 大 小 单方 向 调节 内 源 性 
空间 注意 和 整合 间 的 关系 。 在 两 个 实验 中 , 无论 线 
索 有 效 性 为 5096, 还 是 80%, 均 观 察 到 了 稳定 的 线 
索 化 效应 ， 并且 80% 条 件 下 的 线索 化 效应 显著 高 于 
50% 条 件 下 的 线索 化 效应 , 在 80% 条 件 下 ， 才 观察 
到 内 源 性 空间 注意 对 整合 产生 影响 。 所 以 线索 化 效 
应 量 的 大 小 可 能 是 调节 内 源 性 空间 注意 和 视听 觉 
整合 间 关 系 的 一 个 途径 ,而 视听 觉 整合 对 线索 化 效 
应 可 能 没有 调节 作用 , 未 来 有 待 进一步 探讨 。 其 二 
视听 觉 整合 可 能 对 内 源 性 线索 化 效应 具有 调节 作 
H, 但 本 研究 中 未 发 现 这 一 现象 。 以 往 研 究 发 现 ， 
与 视觉 目标 同时 呈现 的 听觉 刺激 能 够 增强 对 视觉 
目标 的 感知 觉 显著 性 , 在 复杂 的 环境 中 增强 视觉 目 


了 显著 的 线索 化 效应 , 并 且 , 在 每 种 靶 刺 激 通 道 类 
型 上 ，80% 线 索 有 效 性 条 件 下 的 线索 化 效应 都 显著 
大 于 50% 线 索 有 效 性 条 件 下 的 线索 化 效应 。 所 以 无 
论 内 源 性 中 央 箭 头 线索 能 否 高 概率 预测 靶 刺 激 的 
呈现 位 置 ， 都 能 产生 显著 的 线索 化 效应 ， 并 且 随 着 
有 效 性 的 增加 ， 线索 化 效应 逐渐 变 大 ,也 就 是 说 ， 
相 比 50% 线 索 有 效 性 ，80% 线 索 有 效 性 条 件 下 被 试 
对 线索 的 利用 率 更 大 。 本 研究 得 到 的 结果 和 前 人 研 
究 结果 一 致 ， 以 往 研 究 发 现 , 在 内 源 性 线索 -靶子 
范式 中 ,线索 有 效 性 能 够 影响 注意 的 分 配 ， 线索 化 


标的 凸显 性 (Talsma et al, 2010; van der Burg, 
Olivers, Bronkhorst, & Theeuwes, 2008; van der 
Burg, Talsma, Olivers, Hickey, & Theeuwes, 2011). 
在 本 研究 的 两 个 实验 中 , 无 论 在 有 效 线索 条 件 ， 还 
是 无 效 线索 条 件 下 ,由 于 双 通 道 刺 激 的 宛 余 效应 使 
得 对 视听 觉 目标 的 反应 时 均 显 著 快 于 视觉 目标 和 
听觉 目标 的 反应 时 。 此 外 , 前 人 研究 发 现 双 通 道 刺 
激 和 单 通道 刺激 捕获 注意 的 能 力 是 受 认 知 负荷 调 
节 的 (Santangelo, Ho, & Spence, 2008; Santangelo & 
Spence, 2007), Santangelo 等 人 (2008) 采 用 空间 线索 
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化 任务 探索 双 通 道 刺激 捕获 注意 的 能 力 ， 研 究 发 现 
在 无 认 知 负荷 条 件 下 ， 单 通道 和 双 通 道 刺激 捕获 注 
意 的 能 力 没有 差别 , 单 通 道 和 双 通 道 刺激 诱发 的 空 
间 线 索 化 效应 没有 差别 。 然 而 , 在 高 认 知 负荷 条 件 
下 ,， 双 通道 刺激 相对 于 单 通道 刺激 ， 可 以 诱发 更 大 
的 空间 线索 化 效应 。 而 本 研究 采用 的 是 较 简 单 的 定 
位 任务 ， 要 求 被 试 对 靶 刺 激 呈 现 位 置 进 行 左右 判断 ， 
因此 任务 简单 可 能 是 未 发 现 整合 对 线索 化 效应 产 
生 调 节 作用 的 原因 。 未 来 可 将 任务 难度 作为 一 个 影 
响 视 听觉 整合 的 因素 进行 探讨 。 


5 结论 


在 内 源 性 线索 -靶子 范式 中 , 不 同 线索 有 效 性 
对 视听 觉 整合 效应 的 调节 不 同 。 高 线索 有 效 性 条 件 
下 ,内 源 性 空间 注意 能 够 促进 视听 觉 整合 效应 。 
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Abstract 


Previous studies usually used the instruction to control the attention of the participants to different spatial 


locations to investigate the influence of endogenous spatial attention on the audiovisual integration, which found 


that endogenous spatial attention enhanced audiovisual integration. However, in reality, it is difficult to assign 


attention in an all-or-none manner. In present study, we used endogenous spatial cue-target paradigm to 


investigate the effect of endogenous spatial cue validity on audiovisual integration. 


The current study was a 2 (cue validities: valid, invalid) x 3 (target modalities: visual, auditory, audiovisual) 


factorial design. A total of 62 undergraduate students were recruited as paid volunteers. Experiment 1 recruited 


35 participants (5 males; age range: 18-26 years; mean age: 21.26 + 1.77 years). Experiment 2 recruited 27 
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participants (6 males; age range: 19~25 years; mean age: 22.19 + 1.75 years). The visual (V) target was a white 
pentagonal asterisk block (2°x2°). The auditory (A) target was a 1600 Hz sinusoidal tone presented by speakers. 
The audiovisual (AV) target was composed by the simultaneous presentation of both the visual and the auditory 
stimuli. At the beginning of each trial, the fixation stimulus was presented for 600~800 ms in the center of the 
monitor. Following the fixation stimulus, the cue was presented for 200 ms, which could predict (50% or 80%) 
the location of the target. Before the target that appeared for 100 ms, the inter stimulus interval (ISI) lasted for 
700 ms. The target (A, V, or AV) randomly appeared for 100 ms in the left or right locations. At last, the fixation 
stimuli appeared for 600 ms to wait for the correspondence responses to targets. During the experiment, the 
participants were asked to locate targets by pressing buttons (F/J) as quickly and accurately as possible. 

The results showed that the responses to AV targets were faster than V or A targets, indicating the 
appearance of the bimodal advancement effect in both experiments. Each target modality showed significant 
cueing effect. And the cueing effect in experiment 2 was significantly larger than the cueing effect in experiment 
1. In addition, in experiment 1, relative multisensory response enhancement (rMRE), race model (probability 
difference) showed no significant difference at valid compared to invalid locations. However, in experiment 2, 
rMRE and race model (probability difference) increased at valid compared to invalid locations. The results 
suggested that endogenous spatial attention enhanced audiovisual integration in high spatial validity condition. 

In summary, Endogenous spatial attention had different effects on the audiovisual integration under 
different spatial cue validity. High spatial cue validity enhanced audiovisual integration. The current study 
provides direct behavioral evidence for endogenous spatial attention to enhance audiovisual integration. 

Key words cue validity; audiovisual integration; endogenous spatial attention; cue-target paradigm; race 
model 


